Beyond Majority Vote: Multi-Perspective Adjudication for Medical Hallucination Detection
超越多数投票：多视角裁决用于医疗幻觉检测
🧭 LLM 幻觉检测与标注基准
Information Sciences Institute, University of Southern California
多视角标注与裁决流程揭示单遍幻觉基准会低估事实错误，LaJ 可辅助发现但无法替代专家判断
📌 工作参考价值（4 点）
- 在商品文案、广告生成或购物助手回复的幻觉评估中，不要只做单遍人工标注；先用 LLM-as-a-Judge 批量召回可疑事实错误，再人工/证据核查，能提升错误覆盖。
- LaJ 不能作为唯一裁判：它漏掉人类能抓到的错误。把 LaJ 输出当候选生成器，与人类标注合并去重后进入裁决，可以在成本和覆盖率间平衡。
- 对产品参数、价格、活动规则等高风险内容，建议引入结构化证据库做事实核查（类似论文中 evidence-based adjudication），而不只依赖模型判断。
- 做 LLM 评估 benchmark 时，单遍标注可能系统性低估事实错误；上线前可增加一轮多视角裁决，尤其是长文本中隐蔽错误。